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(54) Process and device for multimedia display of complex systems 

(57) The invention relates to a process and a device (1) for multimedia display of complex 
systems, comprising at least one input unit (2), at least one visual output unit (6), a data memory 
(4), and a processor (3) actuating the data memory (4), the parameters and other characteristics of 
the complex systems and its components being filed hierarchically in the data memory (4), via the 
input unit (2) a node (K) of one hierarchy plane (E) can be selected and displayed and manipulated 
on the visual output unit (6) and via the input unit (2) the hierarchy plane (E) or the node (K) of the 
plane (E) can be changed. 
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Die folgenden Ang'aben sind den vom Anmelder eingereichten Unteriagen entnotnman 

Prufungsantrag genn. § 44 PatG ist gestellt 

(S) Verfahren und Vorrichtung zur nnultimedialen Darstellung komplexer Systeme 

@ Die Erfindung betrifft ein Verfahren und eine Vorrich- 
tung (1) zur muitimedlalen Darstellung komplexer Syste- 
me, umfassend mtndestens eine Eingabeeinheit (2), mln- 
destens eine visuelle Ausgabeeinheit (6), einen Daten- 
speicher (4) und einen den Datenspeicher (4) ansteuern- 
den Prozessor (3), wobei die Parameter und andere Kenn- 
daten des komplexen Systems sowte dessen Komponen- 
ten hierarchisch im Datenspeicher (4) abgelegt sind, uber 
die Eingabeeinheit (2) ein Knoten (K) einer Hierarchieebe- 
ne <E) auswahlbar und auf der visuelten Ausgabeeinheit 
(6) darstellbar und mantpulierbar ist und uber die Einga- 
beeinheit (2) die Hierarchieebene (E) Oder der Knoten (K) 
der Ebene (E) veranderbar ist. 
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Beschreibung 



Die Erfindung betrifft ein Verfahren und eine Vorrichtung 
zur Durchfuhrung des Verfahrens zur mullimedialen Dar- 
stellung komplexer Systeme. 

Insbesondere in der Feitigung komplexer Systeme wie 
z B. Kraftfahrzeuge, Werkzeugmaschinen cxler anderer 
hochwertiger Verbrauchs- und Konsumguter isl eine groBe 
Anzahl einzelner Tbile oder Komponenten zusammenzuset- 



ten Ausfuhrungsbcispieles naher erlauteru Die Figuren zei- 
gen: 

Fig. 1 ein Blockschaltbild der Vomchtung, 
Fig. 2 eine Darstellung der hierarchisch abgelegten 
eines komplexcn Systems, 
Fig. 3 eine multimediale Darstellung eines Motors una 
Fig. 4 eine DarsteUung einer auss«*Shlten KoAponente 

des Motors. . ,\ /\, • 

Die Vbrrichtung 1 zur multimedialeq^ Darstellung anes 



UeinzelnerTfeUeoder Komponenten zusanunenzus^^^^ komplexTsystems umfaBl eine Eingaleeinheit 2. einen 

zen. Aufgrund inuner starker ausgepragter mdmdueUex 10 ^JP'^^, i.^er 4. eine ^i^^putationsein- 

Kundenwunsche^hensich^uzenten^^ Swdne'surUe Aurgabeeinheit6.t)^^ 
Verbrauchs- und Konsumgutem z. B. Kraflfahrzeu^n, ge Benutzer ein komplexes System aus so, 

zwungen. eine enisprcchend groBe A^l von TVpenbzw. "^^^^^Xf^^Vi^n^^ ^^y^i das komplexe SystemT 

Varia^tenanzubietenund2ufertigenD.eshalzuemem^^^^ Te sSncxh™erlauterl wird. DieEi 

mensen Ansteigen der Bautale- und Komponen^v«lh«t IS ^^f^^^ ^^^J ^aus oder Touchscreen oder ab 
gefvihrt,wasaUeineschonwegenderentspiechendenLag«:- ^ ' ausgebildei sein. Die Eingabeein- 

Ltung fur Produktion und Reparatur zu e?°l>'f°^J^'^ S d7r^?n>zessor 3 verbunden, der entsprechend 

gefuhrt hat. Daher wurden und werden vielfeltige Ansten- ^.^ '"J^Eingabeeinheil 2 weitergegebenen Befehle den 

iungen uniemommen. soviel wie mSgbch idenUsche Ttale ^J^"^^^;"/^^^^^ Manipulationseinheit 5 ansteuert. 
Ld Komponenten fur die einzelnen Van-^° ^^^^ ^ graT^g "er Manipu^onseinheit 5 anliegenden 
den. AUerdings sind dem Gren«n gesetzt z B. du^h auBere ^ Ausgabeeinheit 6, die im em- 

Formgebung oder unterschiedbche ^^^^^S'^^^' £^^0 S als BUdschirm oder Monitor ausgebildet ist. 

vermeiden. ZurMogUchkeit dertJberprufung hat der Mitar- ft^t bestimmter Motor fjir ein Kraftfahrzeug 

beiter StQcWisten und/oder Identcheckkarten an sewem ^- ^™ Motorenbauer die lypenbe- 

beitsplatz um zu kontromeren ob die .hm angeUeferten f^^^^t we^^ «^ Eingabeeinheit 2 ein. Der 

TeilezudemzufertigendenProdukt geho^^ 30 ^^"^^fj^adtdann entsprechend der TVpenbezeichnung 



telle zu aciii zai i&iugwuv^wi* ^ »w — „ 

einer starken Mehibelastung der Mitaibeiter und unier den 
Bedingungen des Produktionsdruckes zu einer erhohten 
Fehleiquote. Die falsch eingebauten Teile konnen jedoch ein 
sehr groBes Sicherheitsrisiko darstellen und miissen daher 
von einer nachfolgendcn QualitatskontroUe moglichst ent- 
deckt werden. Wie aber leicht ersichtlich ist, konnen Falsch- 
bauieile in untergeordneten Komponenten nicht mehr op- 
tisch erkannt werden, sondem mussen uber Funkuonstests 
ermittelt weiden. Diese sind zum einen sehr zeitaufwenchg 
und zum andem nicht immer zuverlassig. wenn z. B. falsche 
Schrauben mit nicht ausreichender Festigkdt verwendet 

wurden. , 

Der Erfindung liegt daher das Problem zupunde eine 
Vorrichtung und ein Verfahren zu schaffen. mit dem aibeits- 
Dlatzspezifisch eine einf ache KontroUe der montierteii Tfcile 
und Komponenten eines zu ferdgenden Systems moghch 
ist 

Die Losung des Problems ergibt sich durch die Merkmale 
der Patentanspriiche 1 und 6. Durch die multimediale Dar- 
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zeichnung oes moiurs uu« u.- ^...e— 
Prozessor 3 Wdhlt dann entsprechend der TVpenbezeichnung 
eine Adresse im Datenspeicher 4 aus. so daB die Informano- 
nen fur den Motor am Ausgang des Datenspeichers 4 anbe- 
gen und der Manipulationseinheit 5 zugcfuhit werden. bo- 
lanee kein Manipulationsbefehl uber die Bingabamheit 2 
eingegeben wird, wirkt der Prozessor 3 nicht auf die Mani- 
pulationseinheit S ein, und die Manipulationsanheil 5 gibt 
die Daien an die Ausgabeeinheit 6 weiter. wo diese visueU 
darsestellt werden. Der Motorenbauer sieht also 2. B. eiiie 
perlpektivische Darstellung des ausgewahlten Motors sowie 
eine den Motor charakterisierende ParameterdarsteUung, 
wie z B. Typenbezeichnung und Teilenummer. Mbchtenun 
der Motorenbauer den Motor aus einer anderen Perspektive 
sehen, so kann dieser uber die Eingabeeinheit 2 einenMam- 
pulationsbefehl, wie z. B. "Drehen", eingeben. Der Prozes- 
sor 3 identifiziert den Manipulationsbefehl und steuert ent- 
sprechend die Manipulationseinheit 5 an, ohne die Adressie- 
rung des Datenspeichers 4 zu andem. Mittels bekannter Al- 
Eorithmen der Bildverarbeitung werden die Daten des Da- 

° . . A I J »««A«<»roW«»t imH an file AuseaDC- 



derPatentanspruchelund6.DurchdemuldmedialeDar- g^^^^^^^^rdauLreitetundandieAusgabe- 
..Uungdeskomplexen^^^^^^ 



sowie der ManipulationsmogUchkeiten wie z. B. drehen, 
vergtOBem etc., kann das komplexe System auf einfache 
und iibersichtUche Art und Weise fiir jemanden mit dem 
komplexen System Befassenden aufbereitet werden, so daB 
Unterschiede zu ahnUchen komplexen Systemen leichter er- 
faBbar sind. Da die Parameter und andere Kenndaten des 
komplCTen Systems und dessen Komponenten hierarchisch 
im Datenspeicher abgelegi sind, kann der Beiiutzer das 
kompl«aie System sukzcssive analysieren. Damit entfaUe 
insbesondere die umstandUche KontroUe von StUckbsten 
und Identcheckkarten. Des weitcien lassen sich durch die 
multimediale Darstellung Funktionszusammenhange leich- 
ter erfassen, so daB bei Ensatz in Produktionsstfitten em 
fehlerhafter Zusammenbau des komplexen Systems vcrmie- 
den werden kann. 

Weitere vorteilhafle Ausgestaltungen der Erfindung eige- 
ben sich aus den Unteianspriichen. 
Die Erfindung wird nachfolgend anhand eines bevorzug- 



einheit 6 ausgegeben. Genauso konnen selektierte Bereiche 
der DarsteUung singular dargestellt und vergroBert werden. 
Weiter bestehi die MSgUchkeit, den daigestellten Motor 
sukzessive in seine EinzclteUe zu zerlegen, woai aUe Ein- 
zeUnformationen. wie spSter noch ausWhrbch erlautert 
wird. hierarchisch im Datenspeicher 4 abgelegt sind So 
kann z B. der Motcx aus sechs Komponenten bestehen. 
Durch Selektion mittels der Eingabceinheil 2 kann eine die- 
ser sechs Komponenten dargesteUt werden. Der Selekuons- 
befehl wird vom Prozessor 3 erkannt und entsprechend 
wahlt dieser die zugehorige Adresse des Datenspeichers 4 
aus Diese Auswahbnoglichkeit ist sehr wichug. da buBoe 
Unterschiede verschiedener komplexer Systeme iiur sehr 
marginal oder iiberhaupt nicht sichtbar smd 
65 Komponenten eines komplexen Systems in der Oesamtcter- 
steUung erkennbar sind, sind alle auswahlbaren Komponen- 
ten tabeUarisch neben der graphischen DarsteUung aufge- 
fUhtt. Die ausgewShlte Komponente des Motors isl nun gra- 



ss 
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phiscb auf der Ausgabeeinheit 6 dargestellt und kann, wie 
zuvor beschrieben, manipuliert werden. Weiter besteht die 
Mdglichkeit, zur Gesamtdarstellung des komplexen Sy- 
stems zunickzukehren, einen Ibil oder eine Komponente der 
ausgewahlten Komponente auszuwahlen oder zu einer 
Komponente auf gleicher Ebene zu wechseln. Dadurch kann 
sehr iibersichtlich jedes einzelne Teil des Motors in seinem 
funktionalen Zusammenhang dargestellt werden. Auf ahnli- 
che.Weise kann z. B. mittels einer entsprechenden multime- 
dialen Animation dargestellt werden, was wie in welcher 
Reihenfolge zusammengesetzt werden muB, urn eine Kom- 
ponente oder das komplexe System zu ferdgen. Durch die 
beschriebene Vorrichtung und dem damit verbundenen Ver- 
fahren konnen so verhaltnismafiig leicht und ubersichtlich 
angelieferte Teile auf ihre richtige Zugehorigkeit zu dem zu 
fertigenden komplexen System iiberpruft werden. 

In Fig. 2 ist beispielhafL der Strukturaufbau der im Daten- 
speicher 4 abgelegteo Informadonen iiber das komplexe Sy- 
stem dargestellt. Bel dem daigestellten Strukturaufbau sind 
die KennzeichDungsdaten der aus Modulen oder Einzeltei- 
len bestehenden Komponenten in Ebenen El bis E4 abge- 
speichert, wobei in der hochsten Ebene El die Kenozeicb- 
nungsdaten des komplexen Systems als Produkt P selbst ab- 
gelegt sind. Die Ebenen El bis E4 weisen Knoten Kl-KlO 
auf, die die Kennzdchnungsdaten einer Komponente bein- 
balten. Dabei konnen die Komponenten sowohl Einzelteile, 
mehrteilige Module oder das Produkt P selbst darstellen. 
Das Produkt P besteht in seiner letzten Aggregierungsebene 
£2 aus drei Komponenten, deren Kennzeichnungsdaten in 
den Knoten K2 bis K4 abgelegt sind. Der Knoten K2 bein- 
haltet dabei die Kennzeichnungsdaten eines Einzelteils und 
die Knoten K2 bis K4 die Kennzeichnungsdaten von Modu- 
len. Das Modul des Knotens K2 besteht wiederum genau 
aus drei Komponenten, deren Kennzeichnungsdaten in den 
Knoten K5 bis K7 der untergeordneten Ebene E3 abgelegt 
sind, wobei auch hier der Knoten K6 ein Modul kennzeich- 
net, das aus drei durch die in den Knoten K8 bis KIO der 
Ebene E4 beschriebenen unterschiedlichen Einzelteilen be- 
steht Die Zuordnung der Knoten einer untergeordneten 
Ebene E2 bis E4 zu der nachstmogiichen Ebene El bis E3 
erfolgt uber die Verkniipfungsoperatoren T, die die Anzahl 
der Komponenten der untergeordneten Ebene im Knoten der 
nachsthoheren Ebene beinhalten. So wird z. B. das durch 
den Knoten KIO gekennzeichnete Einzelteil zweimal in dem 
durch den Knoten K6 gekennzeichneten Modul benodgt. 

Die Ebenen E2 bis E4 stellen vorteilhafterwdse Monta- 
geschritte bzw. Zuliefeiebenen dar, wodurch z. B. ein ge- 
nauer tlberblick Uber die Anlieferung der Komponenten zu 
der jeweiligen Montagestufe gegeben ist Uber die Reihen- 
folge der Knoten innerfaalb der Aggregierungsebene B2 
kann auBerdem der Montageablauf des komplexen Systems 
definiert werden, bier durch den Pfeil A gekennzeichnet 

In der Fig. 3 ist dn Motor als komplexes System auf ei- 
nem Monitor als visuelle Ausgabeeinheit 6 perspektivische 
dargestellt. Die Benutzeroberflache 10 stellt dabei sowohl 
Parameter und Kenndaten als auch Wahlmoglichkeiten fiir 
Manipuladonsbefehle zur Verfugung. Aus dem Kennfeld 11 
kann der Benutzer enmehmen, da6 es sich bei dem darge- 
stellten Motor um den Typ 1530 handelt, der in einer per- 
spektivischen Hinteransicht dargestellt ist. Im Kennfeld 12 
sind die Komponenten des Motors der nachsmiedrigen Hier- 
achieebene E2 alphanumerisch dargestellt, wobei die EGR- 
Leitung gerade selekdert wurde so daB die EGR-Leiiung auf 
der visuellen Ausgabeeinheit dargestellt wird (Fig. 4). Die 
Selektion erfolgt dabei direkt uber die alphanumerische 
DarsteUung im Kennfeld 12, oder durch anklicken oder be- 
ruhren der drucksensitiven Oberflache an der Stelle der 
EGR-Leitung in der perspekdvischen DarsteUung. Die aktu- 



ell selektierte Komponente wird im Kennfeld 13 mit seiner 
Bauteilnunmier dargestellt. Tjar iibersichtlicberen Handha- 
bung kann eine Vorauswahl getioffen warden, so daB nur ein 
Tfeil der Komponenten im Kennfeld 12 dargestellt werden. 

5 So konnen z. B. Fenster innerhalb der DarsteUung definiert 
werden, so daB aUe sich im Fenster befindlichen Komponen- 
ten im Kennfeld 12 angezeigt werden, was durch das Be- 
dienfeld 22 realisiert wird. Mit dem Bedienfeld 14 kann die 
Anzeige im Kennfeld 12, wie von Bildlaufleisten graphi- 

10 scher Oberflachen bekannt, verschoben werden. Mittels des 
Bedienfeldes 15 wird die Vorrichtung 1 zur multimedialen 
DarsteUung in einen Scann-Modus geschaltet und eine z. B. 
eine auf dem Zahnriemenschutzlabel des realen Motors auf- 
gebrachte Kodierung eingescannt, so daB die \forrichtung 1 

IS erkennt, daB es sich bei dem vorUegenden Motor um den 
Motor-Typ 1530 handelt und diesen auf der visueUen Aus- 
gabeeinheit 6 darsteUt. Mittels des Bedienfeldes 16 kann das 
dargesteUte komplexe System oder eine seiner aktueU dar- 
gesteUten Komponenten in verschiedene Ansichten gedreht 

20 werden. Das in der Fig. 3 akdve Bedienfeld 17 ermdglicht 
die DarsteUung selekderter Komponenten auf der visueUen 
Ausgabeeinhdt 6 wie der Dbergang von Fig. 3 zu Fig. 4 ver- 
deutlichL Durch das Bedienfeld 18 kann Art und Reihen- 
folge des Ferdgungsprozesses des Motors auf der visuellen 

2S Ausgabeeinheit 6 dargesteUt werden. Bedienfeld 19 ermog- 
Ucht die graphische DarsteUung eines komplexen Systems 
oder einer Komponente nach Eingabe einer Bauteilnummer. 
Bedienfeld 20 ermoglicht die graphische DarsteUung eines 
komplexen Systems oder einer Komponente nach Eingabe 

30 einer Teilebezeichnung wie z. B. EGR-Leitung. Durch Beta- 
tigung von Bedienfeld 21 schaltet die Vorrichtung 1 in den 
Modus Fehlererfassung um. Durch eine entsprechende 
Menii-Fiihrung kann der Benutzer auftretende oder erkannte 
Fehler des komplexen Systems und/oder einer Komponente 

35 eingeben und abspeichem, wobei dies vorzugsweise in 
Form eines ProtokoUs erfolgt. Durch die Menii-Fiihrung 
wird der Benutzer "gezwungen" die auftretenden Fehler 
sehr genau zu spezifizieren, wobei dieser sich an vordefi- 
nierte Termini zu halten hat Dies vereinheidicht die Fehler- 

40 protokoUe, so daB unabhangig von unterschiedUchen Be- 
zeichnungen fiir auftretende Fehler von unterschiedlichen 
Benutzem die FehlerqueUen verbessert ruckverfolgt werden 
konnen. Ist die FehlerqueUe bereits bei der Erfassung ein- 
deutig identifizierbar, so besteht die Option das Fehlerproto- 

45 koU direkt an die betreffende Vorrichtung 1 zu ubeitragen, 
um die aufbretenden Fehler unverzugUcb anzuzeigen und 
wenn moglich abzusteUen. 

In der Fig. 4 ist die selektierte EGR-Leitung aus Fig. 3 
dargesteUt. Im Kennfeld 23 ist die hohere Hierachieebene 

so dargesteUt, aus der die akmeU dargesteUte Komponente aus- 
gewahlt wurde. Durch Betadgung dieses Kennfeldes 23 
wird in die hohere Hierachieebene gewechselt und die ent- 
sprechende Komponente oder das komplexe System wieder 
dargesteUt, aus dem zuvor in die darunterangeordnete Kom- 

55 ponente gewechselt wurde. In der Fig, 3 war dieses Kenn- 
feld leer, da der Motor bereits als das komplexe System 
selbst die hochste Hierachieebene darsteUte. Da das Kenn- 
feld 12 leer ist, erkennt der Benutzer, daB es sich bei der 
EGR-Leitung um ein Einzelteil und um kein Modul handelt 

60 und somit beziigUch dieser Komponente die niedrigste Hier- 
achieebene darsteUt. 

Patentanspruche 

65 1. Vorrichtung (1) zur multimedialen DarsteUung 
komplexer Systeme, umfassend mindestens eine Ein- 
gabeeinheit (2), mindestens eine visueUe Ausgabeein- 
heit (d), einen Datenspeicher (4) und einen den Daten- 
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speicher (4) ansteuernden Prozessor (3), wobei die Pa- 
rameter und andere Kenndaten des komplexen Systems 
sowie dessen Komponenten hierarchisch im Daten- 
speicher (4) abgelegt sind, uber die Eingabeeinheit (2) 
ein Knoten (K) einer Hierachieebene (E) auswahlbar 5 
und auf der visuellen Ausgabeeinheit (6) darstellbar 
und manipulierbar ist und iiber die Eingabeeinheit (2) 
die Hierachieebene (E) oder der Knoten (K) der Ebene 
(E) veranderbar ist. 

2. Vorrichiung nach Anspruch 1, dadurch gekenn- 10 
zeichnet, da6 die Eingabeeinheit (2) als IVistatur und/ 
Oder Computennaus und/oder Touchscreen ausgebildet 
ist. 

3. Vorrichuing nach einem der vorangegangenen An- 
spriicbe, dadurch gekennzeichnet, dafi der Datenspei- IS 
cher (4) als CD-ROM und/oder als magneto-optisches 
Laufwerk ausgebildet ist 

4. Vorrichtung nach einem der vorangegangenen An- 
spriicbe, dadurch gekennzeichnet, daB der Datenspei- 
cher (4) ausgangsseitig mit einer ^ianipulationseinheit 20 
(5) verbunden ist, deren Ausgang mit der Ausgabeein- 
heit (6) verbunden ist und die vom Prozessor (3) ge- 
steuert ist. 

5. Vorrichtung nach einem der vorangegangenen An- 
spriiche, dadurch gekennzeichnet, daB iiber die Einga- 25 
beeinheit (2) aufgefundene oder auftretende Fehler ein- 
gebbar sind, die im Datenspeicher (4) abspeicherbar 
und/oder iiber eine Netzdatenleitung an eine Zentrale 
und/oder weitere Vorrichtungen (1) iibertragbar sind. 

6. Vorrichtung nach einem der vorangegangenen An- 30 
spriicbe, dadurch gekennzeichnet, daB das komplexe 
System und seine Komponenten auf der visuellen Aus- 
gabeeinheit (6) wahlweise zweidimensional oder per- 
spekdvisch darstellbar sind. 

7. Verfahren zur multimedialen Darstellung komple- 35 
xer Systeme, umfassend folgende Verfahrensschritte: 

a) Auswahl eines komplexen Systems durch Be- 
tatigung einer Eingabeeinheit (2), 

b) Darstellung des ausgewahlten komplexen Sy- 
stems in der Hierachieebene (El) und wahlwdse 40 
der Komponenten der darunter angeordneten 
Hierachieebenen (E2) durch eine visuelle Ausga- 
beeinheit (6) und wahlweise 

c) Manipulation des komplexen Systems und/ 
oder Wechsel in eine untergeordnete Hierachie- 4S 
ebene (E2) und wahlweise 

d) Manipuladon und/od^ Wechsel in die iiberge- 
ordnete (El) oder dne unteigeordnete Hierachie 
(E3) Oder Wechsel zu einem anderen Knoten (K) 
innerhalb der Hierachieebene (E2). 50 

8. Verfahren nach Anspruch 7, dadurch gekennzeich- 
net, daB mittels der Eingabeeinheit (2) an einen beliebi- 
gen Knotenpunkt (K,,) einer Hierachieebene (E^ ge- 
sprungen werden kann. 

9. Verfahren nach Anspruch 7 oder 8, dadurch gekenn- 55 
zeichnet, daB aufgefundene oder auftretende Fehler 
wahrend des Verfahrens iiber die Eingabeeinheit (2) 
eingegeben und diese abgespeichert und/oder an eine 
Zenu^e und/oder weitere Vorrichtungen (1) iibertra- 
gen wild. 60 

10. Verfahren nach einem der Anspriiche 7 bis 9, da- 
durch gekennzeichnet, daB der Fertigungsablauf des 
komplexen Systems und/oder der zugehorigen Kompo- 
nenten als Animation dargestellt wird. 

11. Verfahren nach einem der Anspriiche 7 bis 10, da- 6S 
durch gekennzeichnet, daB die Darstellung des kom- 
plexen Systems und seiner Komponenten zweidimen- 
sional und/oder perspekdvisch erfolgt und wahlweise 
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zwischen den beiden Darstellungsarten umgeschaltet 
werden kann. 

12. Verwendung einer Vorrichtung nach einem der 
Anspriiche 1 bis 6, dadurch gekennzeichnet, daB die 
Vorrichtung (1) in einem ProduktionsprozeB eingesetzt 
wird. 
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